EmbodiedSWE: Coding Agents for Long Horizon Dexterous Robotics
EmbodiedSWE:编码智能体用于长时程灵巧机器人及策略监督
ByteDance Seed · Yale University · Princeton University · Carnegie Mellon University · Stanford University
提出 EmbodiedSWE 基准与 EmbodiedSWE-Gen 流水线,用编码智能体解决机器人任务并生成大规模训练数据以提升 VLA 策略
📌 工作参考价值(4 点)
- 借鉴 EmbodiedSWE-Gen 的思路:让 LLM coding agent 在仿真/沙盒中生成任务解决方案(如推荐策略、用户模拟器或 query 改写规则),再通过参数扰动、初始状态随机化、对象属性变化等方式扩充为大规模多样化交互轨迹,用于训练排序/策略模型,降低人工标注成本并提升长尾场景泛化。
- 为 coding agent 封装可验证的工具 API 与奖励函数(例如模拟用户反馈、转化率仿真器、线上策略回放),使 agent 能迭代 refine 策略;业务上可将验证通过的 agent 方案蒸馏进轻量模型部署,避免线上实时调用的高延迟。
- 利用“单方案/单轨迹→多样轨迹”的扩增方法:在推荐系统中,将一条成功用户轨迹或一个高质量策略通过环境扰动、反事实操作、行为模拟生成大量多样训练样本,缓解数据稀疏和冷启动问题。
- 注意 agent 生成方案需要大量迭代交互且易任务特化,落地时优先离线用于高价值场景(如大促机制设计、自动化营销策略生成),并设置验证门槛以减少无效探索。